Think Thrice Before Reranking: Multi-perspective Evidence and Reasoning Integration for Text Reranking
重排序前三思:多视角证据与推理融合的文本重排序
🧭 LLM 文本重排序 · 多轨迹推理 ★ 深度解读
Honor Device Co., Ltd
提出 MERIT-Rank,用语义、意图、证据三个互补推理轨迹联合重排序,并以渐进式 SFT+GRPO 训练,4B 模型超越多数 7B/32B 重排器
📌 工作参考价值(4 点)
- 将 query-doc 相关性拆成「语义对齐 / 意图满足 / 证据支撑」三个互补视角,在单模型内先分视角生成 reasoning + 排序,再合成最终排序;该结构能显著减少单链推理错误传播,适合搜索广告精排中的复杂 query 场景。
- 渐进式 RL 可直接借鉴:SFT 先学格式与基础推理;GRPO 第一阶段用格式奖励 + 相对提升奖励(对比初始召回/BM25 的 NDCG、MRR、RBO),第二阶段再引入绝对 MRR/NDCG,收敛更稳且持续提升排序质量。
- 数据合成与验证方法可复用:用强 teacher 生成多轨迹,弱模型修格式,再双重过滤(合成排序 NDCG@10 必须优于任一单视角;相关文档必须置顶);电商多目标/多信号训练数据合成可参考该验证逻辑。
- 在长候选集滑动窗口重排场景,多视角联合模型用更少窗口(3 vs 9)即可达到同等精度,总 tokens 和延迟更低,对线上成本敏感的重排链路有借鉴价值。